“多模态数据”专利关键词查询_检索下载_查询列表_检索列表_行业专利分布_钻瓜专利网

钻瓜专利网为您找到相关结果3466241个，建议您升级VIP下载更多相关专利

[发明专利]一种多模态数据处理方法及系统-CN201910646750.9在审
发明人：陈益强;肖云龙;谷洋;王记伟;吴桐 -专利权人：中国科学院计算技术研究所
申请日： 2019-07-17 - 公布日： 2019-11-26 - 主分类号： G06N20/00 文献下载
摘要：本发明提出一种多模态数据处理方法及系统，包括：获取多个多模态数据样本，并将多模态数据样本的质量评价作为特征，将多模态数据样本的模态组合作为标签；以特征为输入，并以标签为训练目标，训练多类分类器模型，得到模态选择模型；获取待处理多模态数据，将待处理多模态数据的特征输入模态选择模型，得到模态组合选择结果，通过将待处理多模态数据中除模态组合选择结果以外的置0，得到修改后的多模态数据；修改后的多模态数据输入指定的多模态机器学习任务模型，将多模态机器学习任务模型的输出结果作为待处理多模态数据的多模态数据处理结果。本发明可以提升低数据质量下的多模态机器学习模型性能。
多模态数据多模态样本机器学习模态选择模态组合任务模型标签机器学习模型数据处理结果多类分类器输出结果数据处理特征输入选择结果训练目标质量评价组合选择除模

[发明专利]多模态数据智能分析系统与方法-CN202310904788.8在审
发明人：王中豹;汤小乔;杨鹏辉;吴保国 -专利权人：郑州华商科技有限公司
申请日： 2023-07-24 - 公布日： 2023-10-13 - 主分类号： G06F16/2458 文献下载
摘要：本发明公开了多模态数据智能分析系统与方法，属于数据分析技术领域，包括多模态数据导入模块，用于实时采集且导入多模态数据；多模态数据处理模块，用于对多模态数据进行综合性处理，确定出多模态特征数据；多模态数据分析模块，用于对多模态数据进行分析认证，确定出基于多模态特征数据的分析认证报告；多模态数据管控模块，用于对多模态数据进行安全管控；多模态数据存储模块，用于存储多模态认证数据。本发明解决了现有分析单一性数据，不能结合多模态数据进行智能分析，导致数据分析精度低下，且数据分析效果差的问题，本发明可结合多模态数据进行智能分析，提高数据分析精度，且提升数据分析效果。
多模态数据智能分析系统方法

[发明专利]跨模态数据对齐方法、装置、设备和存储介质-CN202211000048.3在审
发明人：钱胜胜;徐常胜;薛迪展 -专利权人：中国科学院自动化研究所
申请日： 2022-08-19 - 公布日： 2022-11-25 - 主分类号： G06K9/62 文献下载
摘要：本发明实施例提供一种跨模态数据对齐方法、装置、设备和存储介质，该方法包括：获取目标多模态数据；将目标多模态数据，输入至训练后的跨模态数据表征模型，得到目标多模态数据在共同语义表征空间中的目标多模态数据表征；跨模态数据表征模型是基于多模态数据及多模态数据之间的相似度训练得到的；跨模态数据表征模型用于对多模态数据进行表征；多模态数据之间的相似度作为跨模态数据表征模型训练的监督信息；根据目标多模态数据表征之间的相似度，获得对齐的多模态数据。本发明实施例的方法实现了多模态数据的对齐。
跨模态数据对齐方法装置设备存储介质

[发明专利]基于多模态数据融合的安全预警系统-CN202311126201.1在审
发明人：刘勇;吴明玖;申亮;陈继珺;王志敏;张连杰;孙士钢;徐腾;陈玉兰;陈保全;马乐斌 -专利权人：山东航天九通车联网有限公司
申请日： 2023-09-04 - 公布日： 2023-10-13 - 主分类号： G06F18/25 文献下载
摘要：本发明公开了基于多模态数据融合的安全预警系统，属于多模态数据融合技术领域，所述多模态数据融合识别模块用于获取多模态数据融合过程中的运行数据，基于运行数据对多模态数据融合过程中融合完整度进行识别，并将多模态数据融合完整度发送至服务器；所述多模态数据融合反馈模块接收服务器传送的多模态数据融合完整度好的信号，根据多模态数据融合完整度好所对应的数据得到多模态数据反馈端数据，基于多模态数据反馈端数据对多模态数据反馈端的工作状态进行识别，并将多模态数据反馈端的工作状态发送至服务器；所述多模态数据预警模块接收服务器传送的融合完整度差的异常数据信号及多模态数据反馈端工作异常的反馈信号进行预警。
基于多模态数据融合安全预警系统

[发明专利]一种多模态数据处理方法及系统-CN202211587894.X在审
发明人：萧展辉;邹文景;甘莹;梁置铭 -专利权人：南方电网数字电网研究院有限公司
申请日： 2022-12-12 - 公布日： 2023-02-28 - 主分类号： G06F18/21 文献下载
摘要：本申请实施例提供一种多模态数据处理方法及系统，涉及普适计算技术领域。该多模态数据处理方法包括获取目标数据中的多模态数据，将所述多模态数据中至少两种单模态数据的语义信息进行特征化；多模态数据样本的特征进行数值化，以该数值为输入值，并以多模态数据样本的该标签为调教目标；获取待处理多模态数据，将该待处理多模态数据的特征输入该模态选择模型，仅保留该模态组合选择结果，得到修改后的多模态数据；修改后的多模态数据上传至服务器，由所述服务器对所述多模态故障数据进行处理；该处理方法能充分利用多模态之间的有效冗余性，从主动的高质量数据模态选择的角度来解决问题，适用性强。
一种多模态数据处理方法系统

[发明专利]一种自动驾驶多模态数据存储管理方法和系统-CN202310539616.5在审
发明人：李咏诗;陈钰琳;戴观红;袁蔼茵;黄艺林;陈晓雪;邓润荣;李智欣;张扬;车紫珊;吴明超;于欣蕾;陈红标;陈思永;许俊鹏 -专利权人：广东工业大学
申请日： 2023-05-12 - 公布日： 2023-08-22 - 主分类号： G06F16/11 文献下载
摘要：本发明提供一种自动驾驶多模态数据存储管理方法和系统，涉及智能驾驶和数据管理技术领域，该方法包括获取自动驾驶多模态数据并封装；对封装后的自动驾驶多模态数据进行数据解析和数据对齐操作，获取待存储的自动驾驶多模态数据和多模态数据关联信息；建立基于HBase的分布式存储的多模态数据库，并将待存储的自动驾驶多模态数据和多模态数据关联信息共同存储到多模态数据库中，完成自动驾驶多模态数据的存储管理；本发明能够在降低网络能耗的基础上保证数据不失帧，同时，在将多模态数据入库时，对不同模态数据进行数据对齐，并在数据库中存储不同模态数据的关联信息，使多模态数据的联合存取更为高效。
一种自动驾驶多模态数据存储管理方法系统

[发明专利]一种有监督的快速离散多模态哈希检索方法和系统-CN201811269039.8在审
发明人：张化祥;芦旭;李静;朱磊;刘丽;王振华;郭培莲 -专利权人：山东师范大学
申请日： 2018-10-29 - 公布日： 2019-03-08 - 主分类号： G06F16/43 文献下载
摘要：本发明公开了一种有监督的快速离散多模态哈希检索方法和系统，所述方法包括：接收多模态训练数据集，其中每个样本包含成对的多模态数据特征；利用联合的多模态特征映射，将多模态训练数据集投影为联合多模态中间表示；对于多模态训练数据集的联合多模态中间表示，构造有监督的快速离散多模态哈希目标函数；求解所述目标函数，得到哈希函数；接收多模态检索数据集和多模态测试数据集，将其中的样本均投影为联合多模态中间表示，然后根据哈希函数，投影至海明空间得到哈希码；基于哈希码，针对多模态测试数据集中的样本在多模态检索数据集中进行检索。本发明为异构的多模态数据学习离散的哈希码，同时保证了学习效率和检索的精度。
多模态训练数据集中间表示哈希码检索哈希投影样本多模态数据哈希函数检索数据目标函数联合测试数据集多模态特征测试数据学习效率成对的监督求解映射异构保证学习

[发明专利]多源多模态数据的处理系统及应用该系统的方法-CN202010718898.1在审
发明人：丁晓强;张仁卓 -专利权人：北京尚隐科技有限公司
申请日： 2020-07-23 - 公布日： 2020-10-30 - 主分类号： G06F21/62 文献下载
摘要：本发明提供多源多模态数据的处理系统及应用该系统的方法，该处理系统包括：多源多模态数据存储模块，策略控制模块，风险度量模块，数据发现引擎模块，数据脱敏引擎模块，多模态敏感数据分类算法库模块，多模态数据脱敏算法库模块和多源多模态数据访问总线模块；多源多模态数据访问总线模块为其它模块提供了访问多源多模态数据存储模块的接口，实现多源多模态数据的读取、解析和写入。本发明解决现有技术中对多源多模态数据中敏感信息漏识别或误识别、敏感信息未脱敏或脱敏不充分的问题。
多源多模态数据处理系统应用方法

[发明专利]基于多模态数据采集的喉功能分析系统-CN202210386079.0在审
发明人：庄佩耘;马艳利;徐新林;宣佳成 -专利权人：厦门大学附属中山医院
申请日： 2022-04-13 - 公布日： 2022-08-09 - 主分类号： A61B5/00 文献下载
摘要：本发明公开了一种基于多模态数据采集的喉功能分析系统，包括多模态数据采集设备，多模态数据采集设备包括传感器模块，多模态数据采集设备通过传感器模块安装在待采集者身上以对人体喉部的多模态数据进行同步采集；微型中央控制处理器，微型中央控制处理器与多模态数据采集设备电性连接，以便根据控制信号控制多模态数据采集设备对人体喉部的多模态数据进行同步采集，并实时接多模态数据，以及对多模态数据进行处理及发送；用户终端，用户终端与微型中央控制处理器进行通信连接，以接收微型中央控制处理器发送的处理后的多模态数据，并对处理后的多模态数据进行存储及分析；从而为分析喉部复杂的结构性和功能性提供更加全面且有效的数据。
基于多模态数据采集功能分析系统

[发明专利]模型训练方法、装置、设备及存储介质-CN202310673422.4在审
发明人：杨志雄;杨延展 -专利权人：抖音视界有限公司
申请日： 2023-06-07 - 公布日： 2023-08-29 - 主分类号： G06N3/045 文献下载
摘要：本公开实施例提供了一种模型训练方法、装置、设备及存储介质，用于训练多模态融合网络。获取多模态数据；其中，所述多模态数据包括图像数据、文本数据及音频数据中至少两种模态的数据；将所述多模态数据依次输入所述多模态融合网络，输出多模态数据处理结果；基于所述多模态数据处理结果训练所述多模态适配子网络、模态融合子网络及目标任务子网络中的至少一项，获得训练后的多模态融合网络。本公开实施例提供的模型训练方法，训练多模态融合网络中除预训练多模态子网络外的其他子网络，能够有效降低训练所需内存和显存等资源，同时又能利用预训练好的大模型，可以极大的节省计算资源及时间，从而提高多模态融合网络的训练及部署效率
模型训练方法装置设备存储介质

[发明专利]一种基于多模态学习的电力攻击识别方法-CN202010587171.4有效
发明人：王济伟;蒋从锋;欧东阳;闫龙川;殷昱煜;张纪林;黄震;赵子岩;李妍 -专利权人：杭州电子科技大学
申请日： 2020-06-24 - 公布日： 2022-07-22 - 主分类号： H04L9/40 文献下载
摘要：本发明涉及一种基于多模态学习的电力攻击识别方法。本发明包含三部分内容：分布式多模态数据监控单元；模态队列和多模态数据监控中台，三部分的步骤依次实现了多模态监控数据的生成、发送与攻击判断。分布式多模态数据监控单元，利用覆盖层网络实现集群中各局域网的多模态数据生成与采样同步。模态队列利用并行模态队列算法，约束缓存多模态数据的发送。多模态数据监控中台用于判断、存储、查阅多模态监控数据，其中判断过程利用了多源注意力门控循环记忆网络算法，以滑动窗口的方式拉取多模态数据，实现时序感知的多模态电力攻击的判断。
一种基于多模态学习电力攻击识别方法

[发明专利]一种多模态哈希检索方法及装置-CN202310085564.9在审
发明人：朱健;陈光;曾令仿;程永利;张云云;张莹;崔钰;吴洵进 -专利权人：之江实验室
申请日： 2023-01-12 - 公布日： 2023-04-18 - 主分类号： G06F16/583 文献下载
摘要：本发明公开了一种多模态哈希检索方法及装置，该方法包括：获取带有标签的训练数据集；构建带有Transformer Encoder模块的多模态神经网络；根据所述训练数据集中的每个多模态数据经过所述多模态神经网络生成的哈希码与该多模态数据对应的标签，设计目标损失函数；根据所述目标损失函数，采用梯度下降法更新所述多模态神经网络的参数，以训练所述多模态神经网络；获取多模态原始数据并对所述多模态原始数据进行特征工程加工；将加工后的多模态原始数据输入训练后的多模态神经网络中，生成多模态哈希码；利用所述多模态哈希码，进行哈希检索。该方法使用Transformer网络实现多模态特征融合，与单模态哈希表示学习相比，检索的平均准确率(mAP)更高。
一种多模态哈希检索方法装置

[发明专利]一种多模态数据处理方法及语言智能系统-CN202310428468.X在审
发明人：铉静;吴琼;吴珮玄;欧思言;雷焮尧 -专利权人：重庆工商大学;偲塔（重庆）科技发展有限责任公司
申请日： 2023-04-20 - 公布日： 2023-07-25 - 主分类号： G06F18/25 文献下载
摘要：本发明提供一种多模态数据处理方法及语言智能系统，多模态数据处理方法，包括以下步骤：获取多模态数据信息；提取所述多模态数据信息的特征表示，分别获得文本模态数据信息的特征表示、语音模态数据信息的特征表示和图像模态数据信息的特征表示；将所述文本模态数据信息的特征表示、所述语音模态数据信息的特征表示和所述图像模态数据信息的特征表示输入到多模态融合模型中进行训练，获得训练好的所述多模态融合模型的特征表示；将获得训练好的所述多模态融合模型的特征表示输入至自然语言生成模型，输出用于描所述多模态数据信息的自然语言。本发明能够提生多模态融合模型的精确度和准确度，以提升输出的自然语言的精确度和准确度。
一种多模态数据处理方法语言智能系统

[发明专利]最大化模态一致性的多模态数据分析方法及装置-CN202210269022.2在审
发明人：黄金才;冯旸赫;刘泽一;刘忠;程光权;姚晨蝶;马扬;施伟 -专利权人：中国人民解放军国防科技大学
申请日： 2022-03-18 - 公布日： 2022-07-08 - 主分类号： G06K9/62 文献下载
摘要：本申请涉及一种最大化模态一致性的多模态数据分析方法、装置、计算机设备和存储介质。所述方法包括：利用自编码器对多模态原始数据进行编码，得到多模态原始数据的编码子空间；根据CCA相关性分析对多模态原始数据的编码子空间进行相关性矩阵约束，得到多模态原始数据的相关矩阵；根据多模态原始数据的相关矩阵作为最大化模态一致性数据矩阵；对最大化模态一致性数据矩阵进行解码，得到最大化模态一致性模态数据；根据最大化模态一致性模态数据和多模态原始数据进行误差计算，得到的重构误差；根据重构误差对多模态原始数据进行分析重构。采用本方法能够提高模态数据融合效率。
最大化一致性多模态数据分析方法装置

[发明专利]一种基于多模态数据的突发公共安全事件检测方法及系统-CN202011013134.9有效
发明人：张春林;江何;李利军;王庆丰;尚雪松 -专利权人：北京泰策科技有限公司;北京微智信业科技有限公司;北京东方通科技股份有限公司;北京东方通软件有限公司
申请日： 2020-09-24 - 公布日： 2021-01-26 - 主分类号： G06Q50/26 文献下载
摘要：本发明提供一种基于多模态数据的突发公共安全事件检测方法及系统，其中，方法包括：步骤S1：获取第一多模态数据；步骤S2：对第一多模态数据进行解析，当第一多模态数据为触发数据时，获取与第一多模态数据相关联的第二多模态数据；步骤S3：整合第一多模态数据和第二多模态数据，获取事件数据；步骤S4：解析事件数据，确定是否为突发公共安全事件。本发明的基于多模态数据的突发公共安全事件检测方法，对社交软件上的多模态数据进行检测，及时发现突发公共安全事件，实现有关部门及时应对处理。
一种基于多模态数据突发公共安全事件检测方法系统

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
下一页»
尾页
共 100000 条